# @Time : 2021/3/16 19:54
# @Author : chao

#名词提取
from collections import Counter

f1 = open(r'C:\Users\鲍超\Desktop\小论文——基于在线评论的物流客户满意度研究\代码\去除停用词并分词\去除停用词并分词结果\zong_fengci_tingyongci2.txt',
          'r', encoding='utf-8')
#构建一个空列表，用以保存提取出的每个词
words = []
#构建一个空列表，用于保存提取出的名词
ming_words = []
for i in f1.readlines():
    #print(i.replace('x','').split(" "))
    line = i.split(" ")
    for j in line:
        if(j!='' and j!='\n' and j!='x'):
            words.append(j)
#提取名词
for i in words:
    #if('n' in i):
        ming_words.append(i)

#统计词频
counter = Counter(ming_words)
dictionary=dict(counter)
# get to k most frequently occuring words
k=100
res=counter.most_common(k)
print(res)
# 百世
# 垃圾 东西 电话 快递公司 快递员 客服 公司 速度 物流 服务 态度 星 地方 货 发货 服务态度 问 小时 北京 评 快件
# 信息 蜗牛 时间 上海 速度慢 城 感觉 地址 单 站点 人 卖家 尼玛 网点 中心 成都 恶心 素质 商家 牛 坑

# 总
#原始词汇：
# 垃圾 电话 东西 客服 速度 公司 服务 物流 快递员 快递公司 态度 货 服务态度 地方 问 小时 发货 信息 星
# 快件 时间 妈 北京 派件 语 客户 上海 评 广州 蜗牛 差劲 地址 钱 人 网点 卖家 单 感觉 价格 城 深圳 韵
# 速度慢 淘宝 尼玛 收件 恶心 素质 成都 辣鸡
###############################################################################################
#原始词汇2：
# 垃圾 东西 电话 客服 服务 公司 速度 态度 物流 货 服务态度 地方 发货 太差 星 快件 小时 无语 时间 北京 派件
# 客户 问 上海 蜗牛 差劲 地址 广州 卖家 网点 感觉 价格 信息 深圳 速度慢 淘宝 尼玛 收件 妈 素质 单号 钱 辣鸡
# 关门 EMSeng 恶心 人员 成都 中心 城市 商家 建议 牛 取件 极差 货物 员工 效率 手机 坑 路程 站点 单 杭州 收费
# 网购 朋友 消息 情况 事 收货 战斗机 老子 中国 广东 干嘛 寄件 短信 差差 收件人 武汉 人工 行业 给我发 乌龟
# 原因 邮 工作人员 时 中转站 郑州 关机 都还没 事情 顾客 天津 总部 衣服 浙江 态度恶劣
# 过滤后词：
#  电话  客服 速度 公司 服务 物流 快递员 快递公司 态度  服务态度 地方   发货 信息  快件 时间
#  北京 派件  客户 上海  广州  地址 钱 人 网点 卖家   价格 城 深圳 韵  淘宝
# 收件  素质 成都
# hanlp词性标注：
# 垃圾 东西 电话 公司 号 客服 快递员 速度 快递公司 态度 天 物流 货 服务态度 地方 太差 快件 小时 时间 北京 投诉 月 客户 上海 星 蜗牛
# 地址 包裹 广州 太慢 派件 网点 卖家 物流信息 客服电话 价格 信息 深圳 买东西 最差 素质 同城 收件 点 妈 钱 的人 人员 服务 成都 单号
# 中心 辣鸡 我都 城市 商家 家 货物 速度慢 差评员工 效率 手机 感觉 很差 杭州 路程 站点 朋友 消息 早点 揽件 情况 一家 我说 战斗机 牛 我想
# 省内 老子 中国 广东 事 武汉 差差 建议 官网 行业 我家 尼玛 原因 EMS 工作人员 我就 收件人 郑州 通知 乌龟 没人 事情
# 过滤：
# 电话 公司 客服 快递员 速度 快递公司 态度 物流 服务态度 地方 快件 时间 客户 地址 包裹 派件 网点 物流信息 客服电话 价格 信息
# 素质 钱 人员 服务 单号 中心 城市 货物 效率 路程 站点 工作人员

# 提取100特征词结果：
# 垃圾 电话 东西 客服 速度 公司 服务 物流 快递员 快递公司 态度 货 服务态度 地方 问 小时 发货 信息 星  快件 时间 妈 北京 派件 语 客户 上海 评
# 广州 蜗牛 差劲 地址 钱 人 网点 卖家 单 感觉 价格 城 深圳 韵 速度慢 淘宝 尼玛 收件 恶心 素质 成都 辣鸡 关门 情况 EMSeng 朋友 中心 人员 事
# 城市 字 杭州 牛 取件 商家 建议 货物 极差 收费 手机 中国 员工 效率 站点 路程 广东 坑 网购 快递小哥 消息 收货 武汉 战斗机 老子 时 浙江 短信
# 干嘛 差差 寄件 收件人 人工 总部 行业 给我发 气 原因 省 乌龟 郑州 山东 事情

# 时间速度 服务态度 价格 快递便利